¡Misión completada! Has dominado los bloques fundamentales del lenguaje de la IA.No es exactamente correcto. Intentemos reconstruir esa secuencia.Conocimiento cargado: Tokens y Secuencias ... ¿Es ... ? ... ¿O ...
¿Cómo llamamos a los pequeños bloques que utiliza la IA para leer?
¡Exacto! Los tokens son las unidades pequeñas como "manzana", "ing" o "?" que componen el lenguaje para una IA.
¿Cómo representa un ordenador un token para poder entenderlo?
¡Correcto! Los ordenadores solo entienden números, por lo que cada token recibe su propio número de identificación único.
Si tenemos los tokens para "amigo" y "barco", ¿cómo se llama la palabra "amistad" cuando es una lista de números?
¡Perfecto! Una lista ordenada de números de tokens se llama secuencia.
¿Por qué importa tanto el orden de los tokens en una secuencia?
¡Exactamente! Los mismos tokens en un orden diferente pueden cambiar todo el significado de una oración.
¿Cuál es el límite de cuántos tokens puede procesar una IA a la vez?
¡Lo has acertado! La Ventana de Contexto es el límite de cuánta información puede "tener en mente" la IA durante una conversación.
¿Puede una sola marca de puntuación, como un punto (.), ser un token?
¡Correcto! Los tokens pueden ser palabras completas, partes de palabras o incluso signos de puntuación. ¡Todo es un bloque de construcción!
1
Tokenización y Secuencias
EvoClase-AI004Lección 4
0
🤖 ¡Beep Boop! ¡Bienvenido, Cadete! Seleccione un subtópico inferior para ver cómo una IA "lee" mediante tokenización.
Orden de Py-BotEN VIVO
¡Beep Boop! ¡Hola, Cadete! Para enseñar a una IA a leer, primero debemos cortar las palabras en pequeños trozos de "Lego". ¿Listo para aprender cómo los ordenadores convierten palabras en números?
Progreso del Tema0%
¡Excelente elección! Un token es como un bloque de Lego. Palabras como "amistad" se dividen en partes más pequeñas como "amigo" y "barco". ¡Incluso un simple "." es un token! Para una IA, estas piezas son más fáciles de manejar que frases largas enteras.
1
Subtema 1
¿Qué es un Token?
Cortar el texto en pequeños bloques constructivos como "amigo" y "barco".
¡Mira esto! Una vez que tenemos tokens, la IA les asigna a cada uno un número secreto de identificación. Estos números forman una "secuencia". ¡Recuerda: el orden importa! "El perro mordió al hombre" y "El hombre mordió al perro" usan los mismos bloques, pero la secuencia cuenta una historia totalmente diferente.
2
Subtema 2
El Poder de las Secuencias
Convertir bloques en una lista matemática donde el orden es todo.
¿Sabías que la IA tiene una "Ventana de Contexto", que es como su tamaño de mano? Solo puede retener un número determinado de tokens en su "mente" a la vez antes de empezar a olvidar el principio.
¿Sabías que?
La IA tiene una "Ventana de Contexto", que es como su tamaño de mano. Solo puede retener un número determinado de tokens en su "mente" a la vez antes de empezar a olvidar el principio.
Cargando...
⭐⭐⭐

¡Misión Completada!

¡Eres un Maestro de Tokens!